Objective To develop and implement a method for the evaluation of “evidence briefs” and “deliberative dialogues” that could be applied to comparative studies of similar strategies used in the support of evidence-informed policy-making. Methods Participants who read evidence briefs and attended deliberative dialogues in Burkina Faso, Cameroon, Ethiopia, Nigeria, Uganda and Zambia were surveyed before the start of the dialogues – to collect their views on pre-circulated evidence briefs – and at the end of the dialogues – to collect their views on the dialogues. The respondents' assessments of the briefs and dialogues and the respondents' intentions to act on what they had learned were then investigated in descriptive statistical analyses and regression models. Findings Of the 530 individuals who read the evidence briefs and attended dialogues, 304 (57%) and 303 (57%) completed questionnaires about the briefs and dialogues, respectively. Respondents viewed the evidence briefs and deliberative dialogues – as well as each of their key features – very favourably, regardless of the country, issue or group involved. Overall, “not concluding with recommendations” and “not aiming for a consensus” were identified as the least helpful features of the briefs and dialogues, respectively. Respondents generally reported strong intentions to act on what they had learnt. Conclusion Although some aspects of their design may need to be improved or, at least, explained and justified to policy-makers and stakeholders, evidence briefs and deliberative dialogues appear to be highly regarded and to lead to intentions to act.

Resumen Objetivo Desarrollar e implementar un método para evaluar los «escritos de pruebas» y los «diálogos deliberativos» que podrían aplicarse a los estudios comparativos de estrategias similares destinadas a apoyar las políticas basadas en pruebas. Métodos Se encuestó a los participantes que leyeron los escritos de pruebas y asistieron a diálogos deliberativos en Burkina Faso, Camerún, Etiopía, Nigeria, Uganda y Zambia antes del inicio de los diálogos a fin de recoger sus opiniones sobre los escritos de pruebas predistribuidos y, al término de los diálogos, recopilar sus puntos de vista sobre los mismos. Se examinaron las evaluaciones de los escritos y los diálogos de los encuestados, así como la voluntad de actuar en base a lo aprendido por parte de los encuestados en análisis estadísticos descriptivos y modelos de regresión. Resultados De las 530 personas que leyeron los escritos de pruebas y asistieron a los diálogos, 304 (57 %) y 303 (57 %) completaron cuestionarios sobre los escritos y diálogos, respectivamente. Los encuestados mostraron una opinión favorable sobre los escritos de pruebas y los diálogos deliberativos, así como de sus características principales, con independencia del país, tema o grupo involucrado. En general, las características menos útiles de los escritos y diálogos fueron «no concluye con recomendaciones» y «no aspira al consenso», respectivamente. Los encuestados, por lo general, señalaron su firme voluntad de actuar en base a lo aprendido. Conclusión Aunque ciertos aspectos del diseño quizá deben mejorarse o, como mínimo, explicarse y justificarse ante los responsables políticos y las partes interesadas, los escritos de pruebas y los diálogos deliberativos parecen gozar de gran reputación y fomentar la voluntad de actuar.

Résumé Objectif Développer et mettre en œuvre une méthode pour évaluer les «comptes rendus de preuves» et les «réunions délibératoires», qui pourrait être appliquée aux études comparatives de stratégies similaires utilisées pour appuyer l'élaboration de politiques basée sur des données probantes. Méthodes Les participants qui ont lu des comptes rendus de preuves et qui ont assisté à des réunions délibératoires au Burkina Faso, au Cameroun, en Éthiopie, au Nigeria, en Ouganda et en Zambie ont été interrogés avant le début des réunions (pour recueillir leurs points de vue sur les comptes rendus de preuves déjà distribués) et à la fin des réunions (pour recueillir leurs points de vue sur leur contenu). Les évaluations des comptes rendus de preuves et des réunions des répondants, ainsi que les intentions des répondants d'agir sur ce qu'ils avaient appris ont ensuite été étudiées dans des analyses statistiques descriptives et des modèles de régression. Résultats Sur les 530 personnes qui ont lu les comptes rendus de preuves et qui ont assisté aux réunions délibératoires, 304 (57%) et 303 (57%) des répondants ont rempli des questionnaires sur les comptes rendus et sur les dialogues, respectivement. Les répondants ont perçu les comptes rendus de preuves et les réunions délibératoires (ainsi que chacune de leurs principales caractéristiques) de manière très favorable, quel que soit le pays, le sujet ou le groupe impliqué. Dans l'ensemble, les caractéristiques «aucune conclusion avec des recommandations» et «aucun objectif de consensus» ont été identifiées comme celles étant les moins utiles dans les comptes rendus et les réunions, respectivement. Les répondants ont généralement affirmé avoir une forte intention d'agir sur ce qu'ils avaient appris. Conclusion Bien que certains aspects de leur structure aient certainement besoin d'être améliorés ou, tout du moins, expliqués et justifiés auprès des décideurs politiques et des parties prenantes, les comptes rendus de preuves et les réunions délibératoires semblent être hautement considérés, mais aussi stimuler les intentions d'agir.

Different models may be used for explaining how research-based evidence is used in healthcare system policy-making. It is argued that models arising from a clinical setting (i.e. evidence-based policy-making model) could be useful regarding some types of healthcare system decision-making. However, such models are "silent" concerning the influence of political contextual factors on healthcare policy-making and are thus inconsistent with decision-making regarding the modification of healthcare system arrangements. Other political science-based models would seem to be more useful for understanding that research is just one factor affecting decision-making and that different types of research-based evidence can be used instrumentally, conceptual or strategically during different policy-making stages.

Existen diferentes modelos para explicar cómo la evidencia de la investigación se utiliza en los procesos de formulación de políticas sobre los sistemas de salud. En este artículo argumentamos que los modelos que se desarrollaron desde el contexto clínico, como el de políticas basadas en la evidencia, pueden ser útiles en algunas decisiones políticas. Sin embargo, debido a su "silencio" sobre el contexto político, estos modelos son incompatibles con las decisiones relacionadas con la modificación de los arreglos de los sistemas de salud. Otros modelos, generados desde las ciencias políticas, son más útiles para entender que la investigación es uno solo de los factores que afecta la toma de decisiones y que diferentes tipos de evidencia científica pueden ser utilizados de manera instrumental, conceptual o estratégica en diferentes etapas del proceso de formulación de políticas.

RESUMEN Existen diferentes modelos para explicar cómo la evidencia de la investigación se utiliza en los procesos de formulación de políticas sobre los sistemas de salud. En este artículo argumentamos que los modelos que se desarrollaron desde el contexto clínico, como el de políticas basadas en la evidencia, pueden ser útiles en algunas decisiones políticas. Sin embargo, debido a su "silencio" sobre el contexto político, estos modelos son incompatibles con las decisiones relacionadas con la modificación de los arreglos de los sistemas de salud. Otros modelos, generados desde las ciencias políticas, son más útiles para entender que la investigación es uno solo de los factores que afecta la toma de decisiones y que diferentes tipos de evidencia científica pueden ser utilizados de manera instrumental, conceptual o estratégica en diferentes etapas del proceso de formulación de políticas.

ABSTRACT Different models may be used for explaining how research-based evidence is used in healthcare system policy-making. It is argued that models arising from a clinical setting (i.e. evidence-based policy-making model) could be useful regarding some types of healthcare system decision-making. However, such models are "silent" concerning the influence of political contextual factors on healthcare policy-making and are thus inconsistent with decision-making regarding the modification of healthcare system arrangements. Other political science-based models would seem to be more useful for understanding that research is just one factor affecting decision-making and that different types of research-based evidence can be used instrumentally, conceptual or strategically during different policy-making stages.

We developed a framework for assessing country-level efforts to link research to action. The framework has four elements. The first element assesses the general climate (how those who fund research, universities, researchers and users of research support or place value on efforts to link research to action). The second element addresses the production of research (how priority setting ensures that users' needs are identified and how scoping reviews, systematic reviews and single studies are undertaken to address these needs). The third element addresses the mix of four clusters of activities used to link research to action. These include push efforts (how strategies are used to support action based on the messages arising from research), efforts to facilitate "user pull" (how "one-stop shopping" is provided for optimally packaged high-quality reviews either alone or as part of a national electronic library for health, how these reviews are profiled during "teachable moments" such as intense media coverage, and how rapid-response units meet users' needs for the best research), "user pull" efforts undertaken by those who use research (how users assess their capacity to use research and how structures and processes are changed to support the use of research) and exchange efforts (how meaningful partnerships between researchers and users help them to jointly ask and answer relevant questions). The fourth element addresses approaches to evaluation (how support is provided for rigorous evaluations of efforts to link research to action).

Elaboramos un marco para evaluar los esfuerzos desplegados a nivel de país para vincular las investigaciones a la acción. El marco consta de cuatro elementos. El primero evalúa el clima general (de qué manera quienes financian las investigaciones, las universidades, los investigadores y los usuarios de las investigaciones respaldan o valoran los esfuerzos realizados para vincular las investigaciones a la acción). El segundo aborda la producción de investigaciones (cómo mediante el establecimiento de prioridades se asegura que se identifiquen las necesidades de los usuarios, y cómo llevar a cabo revisiones sintéticas, revisiones sistemáticas y estudios independientes para responder a esas necesidades). El tercer elemento aborda la combinación de cuatro tipos de actividades orientadas a vincular las investigaciones a la acción: actividades impulsoras (formas de aplicación de estrategias para apoyar las medidas basadas en los mensajes derivados de las investigaciones), actividades de fomento de la «atracción de usuarios» (por ejemplo una «ventanilla única» para conseguir combinaciones óptimas de revisiones de calidad, ya sea de forma independiente o como parte de una biblioteca electrónica nacional de salud; la reseña de esas revisiones durante las «oportunidades didácticas», como una intensa cobertura mediática; y la actuación de unidades de respuesta rápida en respuesta a las necesidades de los usuarios para optimizar las investigaciones), las actividades de «atracción de usuarios» emprendidas por quienes utilizan las investigaciones (análisis de cómo los usuarios evalúan su capacidad para usar las investigaciones, y de la manera de modificar las estructuras y los procedimientos para fomentar el uso de las mismas), y las actividades de intercambio (determinación de cómo las fórmulas de colaboración más eficaces entre investigadores y usuarios les ayudan a dar forma y responder conjuntamente a los interrogantes pertinentes). El cuarto elemento aborda los métodos de evaluación (la prestación de apoyo para la realización de evaluaciones rigurosas de las actividades de vinculación de las investigaciones a la acción).

Un cadre permettant d'évaluer à l'échelle d'un pays les efforts pour lier recherche et action a été mis au point. Ce cadre comporte quatre composantes. La première évalue le contexte général (quel appui ou quelle valeur les acteurs qui financent la recherche, les universités, les chercheurs et les utilisateurs des données de recherche accordent-ils aux efforts pour relier recherche et action). La deuxième composante s'intéresse à la production de la recherche (dans quelle mesure la définition des priorités garantit-elle l'identification des besoins des utilisateurs et dans quelle mesure également des analyses de portée, des revues systématiques et des études simples sont-elles entreprises pour répondre à ces besoins). La troisième composante traite de l'utilisation d'une combinaison d'activités relevant de quatre groupes pour établir un lien entre recherche et action. Ces activités comprennent les efforts de type «push» (comment mettre en œuvre des stratégies pour étayer les interventions par des messages en provenance de la recherche), ceux visant à faciliter l'extraction d'informations par les utilisateurs («user pull») [comment s'opère l'approvisionnement à une source unique à partir de revues de haute qualité, présentées de manière optimale, isolément ou dans le cadre d'une librairie électronique nationale en faveur de la santé, comment l'attention est attirée sur ces revues pendant les «fenêtres d'enseignement» (couverture médiatique intense, par exemple) et comment les unités de réponse rapide répondent aux besoins des utilisateurs en matière de recherche de qualité optimale], les efforts de type «user pull» entrepris par les utilisateurs de la recherche (comment ces utilisateurs évaluent-ils leur capacité à exploiter les données de recherche et comment modifier les structures et les processus pour appuyer l'utilisation de la recherche), ainsi que les efforts d'échange (comment des partenariats judicieusement organisés entre chercheurs et utilisateurs aident les uns et les autres à poser des questions pertinentes et à y répondre). La quatrième composante concerne les méthodes d'évaluation (comment apporter un soutien en faveur d'évaluations rigoureuses des efforts pour lier recherche et intervention).